2020년 컴퓨터종합학술대회
Current Result Document :
| 한글제목(Korean Title) |
단어 임베딩 모델의 오탈자 교정 성능 평가 |
| 영문제목(English Title) |
Performance evaluation for correction of misspelled words by word embedding model |
| 저자(Author) |
Semok Choi
Cheong Hee Park
최세목
박정희
|
| 원문수록처(Citation) |
VOL 47 NO. 01 PP. 0768 ~ 0770 (2020. 07) |
한글내용
(Korean Abstract) |
스마트폰과 같은 모바일 기기의 발전과 SNS 사용자의 증가와 함께 사용자의 부주의로 인한 오탈자 단어를 포함하는 텍스트 데이터의 발생도 증가하고 있다. 본 논문에서는 단어 임베딩 모델에 의한 오탈자 단어 교정 방법과 문자열 유사도를 이용한 교정 방법들의 성능을 비교한다. 임베딩 방법을 이용한 오탈자 교정을 위해 사전에 포함되지 않은 단어가 입력으로 주어지는 경우에도 입력 단어의 벡터 임베딩을 구할 수 있는 FastText 모델을 이용하였다. Wikipedia 데이터를 이용한 실험 결과는 FastText 방법을 사용한 오탈자 교정 모델이 Edit Distance, Jaccard Distance를 사용한 모델과 비교했을 때의 성능은 떨어졌으나 Jaro-Winkler 유사도를 사용한 모델에 비해서는 좋은 성능을 가짐을 보여주었다. |
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
